# mysql 中的日志
# 1. mysql 中的错误日志
/*
1) 错误日志(Error Log)是 MySQL 中最常用的一种日志,主要记录 MySQL 服务器启动和停止过程中的信息、服务器在运行过程中发生的故障和异常情况等。
2) 在 MySQL 数据库中,默认开启错误日志功能。一般情况下,错误日志存储在/var/log/mysql/mysqld.log
注意:错误日志中记录的并非全是错误信息,例如 MySQL 如何启动 InnoDB 的表空间文件、如何初始化自己的存储引擎等,这些也记录在错误日志文件中。
*/
-- 查看错误日志
mysql> show variables like '%log_err%';
+----------------------------+----------------------------------------+
| Variable_name | Value |
+----------------------------+----------------------------------------+
| binlog_error_action | ABORT_SERVER |
| log_error | /var/log/mysql/mysqld.log |
| log_error_services | log_filter_internal; log_sink_internal |
| log_error_suppression_list | |
| log_error_verbosity | 2 |
+----------------------------+----------------------------------------+
5 rows in set (0.00 sec)
/*
[root@iZ2ze58f53sxjm9z7mgn5xZ log]# ls mysql/mysqld.log
-rw-r----- 1 mysql mysql 0 Sep 14 03:06 mysql/mysqld.log
*/
/*
1) 在 MySQL 中,可以使用 mysqladmin 命令来开启新的错误日志,以保证 MySQL 服务器上的硬盘空间。mysqladmin 命令的语法如下
[root@iZ2ze58f53sxjm9z7mgn5xZ mysql]# mysqladmin -uroot -p flush-logs
2) 执行该命令后,MySQL 服务器首先会自动创建一个新的错误日志,然后将旧的错误日志更名为 filename.err-old
3) MySQL 服务器发生异常时,管理员可以在错误日志中找到发生异常的时间、原因,然后根据这些信息来解决异常。对于很久之前的错误日志,查看的可能性不大,可以直接将这些错误日志删除。
*/
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
# 2. mysql 中的二进制日志(bin log)
# 2.1 binlog 的基本介绍
/*
1) bin log 记录了所有的DDL(数据定义语言)语句和DML(数据操纵语言)语句,但是不包括数据查询(select、show)等语句.
2) bin log 的作用
A) 灾难时的数据恢复
B) mysql 的主从复制,在mysql8版本中,默认bin log 是开启的
*/
-- 查询bin log相关参数
mysql> show variables like '%log_bin%';
+---------------------------------+-----------------------------+
| Variable_name | Value |
+---------------------------------+-----------------------------+
| log_bin | ON | -- bin log 开关
| log_bin_basename | /var/lib/mysql/binlog | -- bin log 文件位置,binlog是文件前缀
| log_bin_index | /var/lib/mysql/binlog.index | -- bin log 索引文件
| log_bin_trust_function_creators | OFF |
| log_bin_use_v1_row_events | OFF |
| sql_log_bin | ON |
+---------------------------------+-----------------------------+
6 rows in set (0.00 sec)
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
# 2.2 binlog 的日志格式
/*
mysql binlog日志有三种格式,分别为Statement,MiXED,以及ROW
1) 1.Statement:每一条会修改数据的sql都会记录在binlog中
优点:不需要记录每一行的变化,减少了binlog日志量,节约了IO,提高性能。(相比row能节约多少性能与日志量,这个取决于应用的SQL情况,正常同一条记录修改或者插入row格式所产生的日志量还小于Statement产生的日志量,
但是考虑到如果带条件的update操作,以及整表删除,alter表等操作,ROW格式会产生大量日志,因此在考虑是否使用ROW格式日志时应该跟据应用的实际情况,其所产生的日志量会增加多少,以及带来的IO性能问题。)
缺点:由于记录的只是执行语句,为了这些语句能在slave上正确运行,因此还必须记录每条语句在执行的时候的一些相关信息,以保证所有语句能在slave得到和在master端执行时候相同的结果。
另外mysql 的复制,像一些特定函数功能,slave可与master上要保持一致会有很多相关问题(如sleep()函数, last_insert_id(),以及user-defined functions(udf)会出现问题).
2) Row:不记录sql语句上下文相关信息,仅保存哪条记录被修改
优点: binlog中可以不记录执行的sql语句的上下文相关的信息,仅需要记录那一条记录被修改成什么了。
所以rowlevel的日志内容会非常清楚的记录下每一行数据修改的细节。而且不会出现某些特定情况下的存储过程,或function,以及trigger的调用和触发无法被正确复制的问题
缺点:所有的执行的语句当记录到日志中的时候,都将以每行记录的修改来记录,这样可能会产生大量的日志内容,比如一条update语句,修改多条记录,则binlog中每一条修改都会有记录,这样造成binlog日志量会很大,
特别是当执行alter table之类的语句的时候,由于表结构修改,每条记录都发生改变,那么该表每一条记录都会记录到日志中。
3) Mixedlevel: 是以上两种level的混合使用,一般的语句修改使用statment格式保存binlog,如一些函数,statement无法完成主从复制的操作,则采用row格式保存binlog
MySQL会根据执行的每一条具体的sql语句来区分对待记录的日志形式,也就是在Statement和Row之间选择一种.新版本的MySQL中队row level模式也被做了优化,并不是所有的修改都会以row level来记录,像遇到表结构变更的时候就会以statement模式来记录。至于update或者delete等修改数据的语句,还是会记录所有行的变更
*/
-- 查看binlog 格式
mysql> show global variables like '%binlog_format%';
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| binlog_format | ROW |
+---------------+-------+
1 row in set (0.01 sec)
/*
binlog 的基本配置通过mysql的my.cnf文件的属性binlog_format指定。如以下:
binlog_format = MIXED //binlog日志格式
log_bin =dir/mysql-bin.log //binlog日志名
expire_logs_days = 7 //binlog过期清理时间
max_binlog_size 100m //binlog每个日志文件大小
查看ROW 格式的binlog日志,使用mysql提供的工具mysqlbinlog
[root@iZ2ze58f53sxjm9z7mgn5xZ mysql]# mysqlbinlog -v $binlog_file_name
....
....
### UPDATE `my_test`.`course`
### WHERE
### @1=2
### @2='PHP'
### SET
### @1=2
### @2='JS'
# at 18100
#220915 15:04:53 server id 1 end_log_pos 18131 CRC32 0xaebceeed Xid = 1356
....
....
binlog 的删除:
RESET MASTER;//删除所有binlog日志,新日志编号从头开始
PURGE MASTER LOGS TO 'mysql-bin.010';//删除mysql-bin.010之前所有日志
PURGE MASTER LOGS BEFORE '2003-04-02 22:46:26';// 删除2003-04-02 22:46:26之前产生的所有日志
清除3天前的 binlog : PURGE MASTER LOGS BEFORE DATE_SUB( NOW( ), INTERVAL 3 DAY);
*/
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
# 3. mysql 中的查询日志
/*
查询日志记录了client端所有操作语句,而binlog则不包含查询数据的sql语句,默认情况下,查询日志是没有开启的,如果要开启查询日志,可以进行配置.
*/
mysql> show variables like '%general%';
+------------------+--------------------------------------------+
| Variable_name | Value |
+------------------+--------------------------------------------+
| general_log | OFF |
| general_log_file | /var/lib/mysql/iZ2ze58f53sxjm9z7mgn5xZ.log |
+------------------+--------------------------------------------+
2 rows in set (0.00 sec)
/*
如果需要开启,则需要更改/etc/my.conf 配置文件:
general_log=1
general_log_file=$my_path
*/
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
# 4. mysql 中的慢查询日志
/*
慢查询日志记录了所有执行时间超过参数long_query_time设置值并且扫描记录数不小于min_examined_limit的所有sql语句,默认没有开启.
如果需要开启,这需要编辑/etc/my.cof
slow_query_log=1 -- 开启
long_query_time -- 时间参数(默认为10S,最小为0)
*/
-- 查看开关和日志路径
mysql> show variables like '%slow_query%';
+---------------------+-----------------------------------+
| Variable_name | Value |
+---------------------+-----------------------------------+
| slow_query_log | ON |
| slow_query_log_file | /var/lib/mysql/localhost-slow.log |
+---------------------+-----------------------------------+
2 rows in set (0.00 sec)
/*
默认情况下,不会记录管理语句,也不会记录不使用索引进行查找的语句,可以使用log_slow_admin_statements和log_queries_not_using_indexs更改.
记录执行比较慢的管理语句
log_slow_admin_statements=1
记录执行比较慢的未使用索引的语句
log_queries_not_using_indexs=1
*/
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28